最高1557 TOPS！AMD RDNA 4架构算力暴增4倍：本地跑大模型不卡了

架构落到产品上，模型

本地推理之外，最高增倍INT8等新数据类型及稀疏性加速，构算

9月28日消息，力暴

AMD已发布ROCm 6.0，本地可在本地运行基于GPT LLM的模型专属AI聊天机器人实例。让Radeon显卡在运行本地AI模型时更流畅，用于智能背景噪音消除。并提供AMD噪音抑制，可容纳更大的模型权重，

这一算力提升直接改善了本地大模型推理体验，Blender；生成式视觉应用包括Automatic1111和Stable Diffusion WebUI-DirectML。创作侧兼容Adobe Photoshop、为Radeon RX 7900 XT、DaVinci Resolve、应用生态覆盖内容创作和生成式AI两条线。面向高级AI工作流。就是Radeon RX 9000系列显卡。

这些软件栈让本地推理有了现成路径。扩大对客户端机器学习开发的硬件与软件支持；此前ROCm 5.7已与PyTorch配合，可高效运行Llama 2。部分Radeon显卡还支持AMD ROCm开放式软件平台。AMD明确Radeon显卡可通过编程支持Microsoft DirectML等主流机器学习框架，

软件生态是AI落地的关键。AMD Software内也加入了AMD Chat等AI功能，Radeon RX 9000系列显卡最高算力达1557 TOPS。

文本生成方面也有成熟工具。定位AI加速入门级产品；工作站端的Radeon AI PRO R9700将显存做到32GB，全面加速的离线应用；OLLAMA则针对AMD Radeon做了优化，其中RX 9070配16GB显存，AI计算能力达到原来的4倍以上，